Metric	Score
Weighted-F1	38.03
Hyphens-F1	0.00
Comma-F1	42.15
Ellipsis-F1	0.00
Fullstop-F1	42.80
QMark-F1	57.69
Colon-F1	21.65
Excl-F1	0.00

Metric	Score
Weighted-F1	34.40
Hyphens-F1	0.00
Comma-F1	38.70
Ellipsis-F1	100.00
Fullstop-F1	39.29
QMark-F1	41.36
Colon-F1	18.26
Excl-F1	0.00

Metric	Score
Weighted-F1	33.29
Hyphens-F1	0.00
Comma-F1	37.74
Ellipsis-F1	100.00
Fullstop-F1	38.23
QMark-F1	50.00
Colon-F1	14.49
Excl-F1	0.00

Metric	Score
Weighted-F1	30.11
Hyphens-F1	0.00
Comma-F1	33.15
Ellipsis-F1	100.00
Fullstop-F1	35.44
QMark-F1	48.67
Colon-F1	15.60
Excl-F1	0.00

worst items

note: the gold standard is taken from the challenge

#	input	expected output	actual output	test-C Fullstop-F1
1	wikitalks005743 boże widzisz takie hasło i nie grzmisz gdzie moderator taki tekst nie powinien się gdziekolwiek ukazywać jest straszny pod k…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O …	O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O…	0.00
2	wikinews183687 39 letni szkocki rajdowiec colin mcrae prawdopodobnie zginął w katastrofie helikoptera squirrel którym leciał wraz ze swoim p…	O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O B-FULLSTOP O O O O B-FULLSTO…	O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O B-FULLSTOP O O O O B-FULLSTOP O O …	0.00
3	wikinews189425 " discovery " wylądował na bieżni numer 33 w kennedy space center na florydzie dziś o godzinie 13 08 gmt kończąc misję sts 13…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O B…	0.00
4	wikinews189795 przeciętnie grająca sparta praga pokonała lecha poznań 1 0 w pierwszym meczu iii rundy ligi mistrzów rewanż 4 sierpnia w pozn…	O O O O O O O O O O O O O O O B-FULLSTOP O O O O B-FULLSTOP O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O B-FULLS…	O O O O O O O O O O O O O O B-FULLSTOP O O O O B-FULLSTOP O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP …	0.00
5	wikinews231930 koło miasta richland gdzie znajduje się nieczynny zakład wytwarzania plutonu dla celów wojskowych złapano królika wykazująceg…	O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O B-FULLSTOP O O O…	O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O B-FULLSTOP O O O O O…	0.00
6	wikitalks0017499 ani słowa o powodzi tysiąclecia z 1997 podczas której miasto tak ucierpiało morus kot przynależność do województwa błąd w l…	O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O B-FULLSTOP O O O…	O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O B-FULLSTOP O O O O O…	0.00
7	wikinews182510 około godziny 11 00 w okolicy skrzyżowania ulic lisowskiej i żeromskiego w warszawie podczas prac remontowych doszło do uszko…	O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O B-FULLSTOP O O…	O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O B-FULLSTOP O O O…	0.00
8	wikinews187280 gdy jeden z jej uczniów demonstrował i rozdawał swoim kolegom kopie systemu helios linux jego nauczycielka postanowiła wydać …	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O…	0.00
9	wikinews188914 potrzeba zaproszenia armii amerykańskiej na polskie terytorium w celu " obrony przed rosyjską agresją " jest " mało zrozumiał…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O B-FU…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O B-FULL…	0.00
10	wikinews184437 szef unii chrześcijańsko demokratycznej i wicepremier czech jiří čunek poinformował w czwartek że 7 listopada poda się do dym…	O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O…	O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O B…	0.00
11	wikinews188806 tygodnik gala już po raz siódmy ogłosił konkurs na najpiękniejszych polaków tych których podziwia się za mądrość osiągnięcia …	O O O O O O O O O O B-FULLSTOP O O O O O O O O B-FULLSTOP O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O O O O O O…	O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O B…	0.00
12	wikinews190316 usterka przyrządów mierniczych uniemożliwia potwierdzenie stanu reaktora nr 3 japońskiej elektrowni jądrowej fukushima daiich…	O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O B-FULLSTOP O O O…	O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O B-FULLSTOP O O O O…	0.00
13	wikinews181292 w czwartek w warszawskim centrum olimpijskim odbyła się konferencja prasowa inaugurująca sezon kolarski 2007 na spotkaniu poz…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O …	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O …	0.00
14	wikitalks008601 a co z wyrażeniem " oblucja " " w kościele rzymskokatolickim " dlaczego na wstępie tego artykułu jest napisane że ablucja to…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O B-FULLSTOP O O O …	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O B-FULLSTOP O O O O …	0.00
15	wikinews196417 " dlaczego ścigano wachowskiego a szczególnie dlaczego robiono rewizje wachowskiemu dlatego że chciano znaleźć oryginalne]] p…	O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O …	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O …	0.00
16	wikinews186513 " poczuj się jak gwiazda " pod tym hasłem będzie przebiegał kolejny już dzień otwarty telewizji polskiej podczas spotkania z …	O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O B-FULLSTOP O O O B-FULLSTOP O O O O B-FULLSTOP O O O O O O O O O O O O O O O B-FU…	O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O B-FULLSTOP O O O B-FULLSTOP O O O O B-FULLSTOP O O O O O O O O O O O O O O O B-FULL…	0.00
17	wikinews188616 z informacji rządu w bogocie wynika iż 57 letni prezydent kolumbii alvaro uribe jest chory na grypę h1n1 potocznie zwaną meks…	O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O …	O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O …	0.00
18	wikinews239126 o godzinie 12 06 04 czasu polskiego chiny wystrzeliły sondę księżycową chang'e 1 jest to pierwszy chiński statek kosmiczny wy…	O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O O O O O O O …	O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FU…	0.00
19	wikinews228267 o godzinie 15 40 premier jarosław kaczyński ma spotkać się z czterema pielęgniarkami które od wtorku okupują kancelarię premi…	O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O B-FULLSTOP O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O…	O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O B-FULLSTOP O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O…	0.00
20	wikinews231823 o godzinie 9 54 lokalnego czasu w podziemiach san francisco gdzie znajdowały się transformatory elektryczne firmy pacific gas…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O…	0.00
21	wikinews228153 w obliczu coraz bardziej realnych przedterminowych wyborów słabsze partie muszą szukać rozwiązania by uniknąć eliminacji z pr…	O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O B-FULL…	O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O …	0.00
22	wikinews183820 " kościół zawsze nalegał i przypominał że to jest obowiązek moralny wzięcia udziału w wyborach natomiast nie powinien się wyp…	O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O B-FULLSTOP O O O O O O O O…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O B-FULLSTOP O O O O O O O O B-FULLSTOP…	0.00
23	wikitalks0012041 ciekawe wyrażenie arytmetyczne tylko że odkąd to unia pracy jest centrolewicowa czyżby środek ciężkości przesunąwszy był zr…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FU…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULL…	0.00
24	wikinews195014 chcę stworzyć ramy " oddechu duchowego " dla kościołów i związków wyznaniowych powiedział michał boni na spotkaniu z przedsta…	O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O B-FULLSTOP O O O O O O O…	O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O B-FULLSTOP O O O O O O O O…	0.00
25	wikinews185330 83 letni były strażnik więzienny ss został skazany na dożywocie we włoszech za nazistowskie zbrodnie wojenne został umieszczo…	O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O B-FULLSTOP O O O O O O B-FULLSTOP O …	O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O B-FULLSTOP O O O O O O B-FULLSTOP O O …	0.00
26	wikinews184105 4 października w godzinach wieczornych po raz 17 przyznano ig noble zwane też anty noblami dostają je naukowcy których badani…	O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FU…	O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP…	0.00
27	wikinews185937 po wygranej z mistrzami świata holandia pokonała francję wygrywając 4 1 na mecz z francuzami marco van basten nie dokonał żad…	O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O B-FULLSTOP O…	O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O …	0.00
28	wikitalks001872 dlaczego eurocopter ec725 super cougar i dalej " " a h225m caracal jak znam życie i ryst tą samą maszyną co ej ein ek to ec7…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O B-FULLSTOP O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-…	0.00
29	wikinews199816 hiszpan rafael nadal lider rankingu tenisistów pokonał niemca björna phaua 7 6 6 3 7 6 i awansował do drugiej rundy wielkoszl…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O B-FULLSTOP O O O B-FULLSTOP O O O O O…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O B-FULLSTOP O O O B-FULLSTOP O O O O O O…	0.00
30	wikinews231289 ruch chrześcijańsko demokratyczny opuścił w poniedziałek koalicję rządową premiera mikuláša dzurindy do dymisji podało się tr…	O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O B-F…	O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O B-FULLS…	0.00
31	wikinews196430 " lechu wałęso jest pan wielkim symbolem polski europy i świata który wierzy w wolność i odrzuca wszelkie formy dyktatury " m…	O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O B-FULLSTOP O O O O O B-FULLSTOP O O O O O O O O O O B…	O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O B-FULLSTOP O O O O O B-FULLSTOP O O O O O O O O O B-FUL…	0.00
32	wikinews228516 szef urzędu komitetu integracji europejskiej mikołaj dowgielewicz powiedział w tvp info że osiągnęliśmy w niedzielę zakładane…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O B-FULLSTOP O O O O O O O O O O O O B-FULLSTOP O O O O O…	O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O B-FULLSTOP O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O…	0.00
33	wikinews185273 " european passion play 2008 " pod ta nazwą symfoniczno metalowy zespół z finlandii nightwish rozpocznie swoją trasę koncerto…	O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O B-FULLSTOP O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O O…	O O O O O O O O O O O O O O O O B-FULLSTOP O O O B-FULLSTOP O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O B-FUL…	0.00
34	wikinews195555 w dniach 11 18 lipca 2010 w zagrodzie kurpiowskiej w kadzidle będzie miała miejsce letnia szkoła muzyki ludowej na kurpiach p…	O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O B-FULLSTOP B-FULLS…	O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O B-FULLSTOP B-FULLSTOP …	0.00
35	wikinews183932 reprezentacja polskich siatkarek kroczy od zwycięstwa do zwycięstwa podczas mistrzostw europy w ostatnim spotkaniu drugiej ru…	O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O B-FULLSTOP O O O O O B-FULLSTOP O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O …	O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O B-FULLSTOP O O O O O B-FULLSTOP O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O …	4.88
36	wikinews227876 " uroczyście ogłaszam poniedziałek dniem radości narodowej awans do mistrzostw europy 2008 to historyczny moment " powiedział…	O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O B-FULLSTOP O O O O O O O B-FULLSTOP O O O O O O O O …	O O O O O O B-FULLSTOP O O O O O O O O O O O O O O B-FULLSTOP O O O O B-FULLSTOP O O O O O O O B-FULLSTOP O O O O O O O B-FULLSTOP O O O O O…	5.41
37	wikinews188756 polskie siatkarki pokonały niemki 3 0 w małym finale mistrzostw europy 2009 i sięgnęły po brązowe medale niedoświadczonym prz…	O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O…	O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O…	5.41
38	wikinews184441 2 listopada w nocy zginął w iraku mający 31 lat starszy kapral andrzej filipek żołnierz z iii brygady zmechanizowanej w lubli…	O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O B-FULLSTOP O O O O O O O O O O O…	O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O B-FULLSTOP O…	5.56
39	wikinews179354 prezydent usa george bush powiedział że odnowa nowego orleanu i innych zalanych terenów potrwa lata stan luizjana wraz ze sto…	O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O…	O O O O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O B-FULLSTOP O O O O O O O O O O O O O O O O O O O O O O O B-FULLSTOP O O O O O O…	6.06
40	wikinews181052 jak poinformowała telewizja sky news brytyjska policja zatrzymała drugiego podejrzanego w sprawie zabójstw prostytutek w ipsw…	O O O O O O O O O O O O O O O B-FULLSTOP O O O O B-FULLSTOP O O O O O O B-FULLSTOP O O O O O O O O B-FULLSTOP O O O O B-FULLSTOP O O O O O O…	O O O O O O O O O O O O O O O B-FULLSTOP O O O B-FULLSTOP O O O O O O B-FULLSTOP O O O O O O O O B-FULLSTOP O O O O B-FULLSTOP O O O O O O O…	6.25